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Концепция системи автоматичного розшзнавання 
номерних знаюв автомоб1л1в 


В статье представлена концепция системы автоматического распознавания номерных знаков 
автотранспортных средств. Выделены основные этапы построения и функционирования автоматической 
системы распознавания номеров, которые являются отдельными взаимосвязанными подзадачами, 
допускающими самостоятельное рассмотрение. Рассмотрены особенности задач на каждом этапе и 
возможные пути их решения. Отдельное внимание уделено критериям оценки качества систем 
распознавания автомобильных номеров, которые во многом определяют используемые подходы в 
процессе разработки системы. 
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Введение 


Автоматическое распознавание номерных знаков автотранспортных средств 
является достаточно актуальной и практически важной проблемой [1]. На данный 
момент есть множество прикладных систем, решающих эту задачу, принципы работы 
которых не раскрываются из коммерческих соображений. 

Системы распознавания номерных знаков являются комплексными системами, 
состоящими из нескольких этапов обработки входных данных. На каждом этапе 
выполняется специфическая обработка с применением методов, различных у разных 
систем. Закрытость используемых в существующих системах технологий затрудняет 
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анализ применяемых подходов с точки зрения выявления их наилучшей комбинации. 
Не смотря на специфические особенности решения каждой подзадачи в системе рас- 
познавания номерных знаков, их совокупность и последовательность их иИспользо- 
вания имеют общие черты и могут использоваться как в рамках определенной КОНЦЕПЦИИ 
решения общей задачи, так и многих смежных задач, Например, распознавания номеров 
железнодорожных вагонов или контейнеров. 

Целью данной работы является описание общей концепции построения системы 
распознавания номерных знаков, в рамках которой делается декомпозиция общей 
задачи на этапы и предлагаются пути их решения. 


Особенности получения входных данных 
для распознавания номеров 


На вход систем распознавания автомобильных номеров подаются изображения, 
полученные в ходе видеосъемки в некоторой выделенной области наблюдения. Многие 
проблемы и сложности проектирования систем распознавания могут быть устранены 
уже на этапе установки определенной системы получения видеоизображений. Так, 
выбор видеокамеры определяет многие важные параметры входных изображений, 
которые в значительной степени влияют на качество распознавания номеров. Так, 
светочувствительность влияет на яркость и контрастность входных изображений, 
особенно в условиях недостаточного освещения. Скорость затвора или время получения 
изображения влияет на степень его смазанности или размытости, так как автомати- 
ческое считывание номеров часто осуществляется для движущихся транспортных 
средств, причем скорость движения может быть достаточно высокой, до 200 км/ч. 
Использование инфракрасной подсветки и, соответственно, камер, чувствительных в 
инфракрасном диапазоне, является, пожалуй, единственным способом получения 
изображений достаточного качества для распознавания в ночных условиях, когда 
камеру «ослепляет» свет фар автомобиля. 

Специальная установка камеры позволяет получать изображения, на которых 
таблички номерных знаков имеют определенную фиксированную форму с небольшими 
отклонениями, что существенно сужает возможный разброс в геометрии входных 
изображений номеров и соответственно упрощает их последующее распознавание. 
Часто можно компенсировать геометрические искажения изображений номеров из-за 
ракурса съемки программным путем, зная параметры установки камеры и параметры 
движения транспортного потока в конкретных условиях наблюдения. 

Важным параметром входных данных для систем распознавания номеров яв- 
ляется размер изображения номера. На практике различные системы используют раз- 
личные требования к минимальному значению этого параметра, от 100 до 150 пик- 
селей по горизонтали. При низком пространственном разрешении изображения номер- 
ного знака качество работы системы распознавания может существенно уменьшаться. 
Следует также отметить, что от требований к минимальному размеру изображения 
номерного знака во многом зависят подходы к его обнаружению и распознаванию, а, 
следовательно, скорость и качество распознавания. 


Этапы обработки входной информации 
при распознавании номеров 


Процесс распознавания автомобильных номеров можно разделить на несколько 
самостоятельных этапов последовательной обработки входных данных, приведен- 
ных на рис. 1. 
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Нормализация входного 


Обнаружение номерных знаков 


Результат обработки входного изображения 


полученных результатов 

Рисунок 1 — Схема обработки входных данных при распознавании номерных знаков 

Несмотря на последовательный характер обработки входных данных для уско- 
рения расчетов на каждом этапе можно применить параллельную обработку. Так, 
при обнаружении номерных знаков можно параллельно обрабатывать отдельные 
части изображения, при выполнении нормализации, сегментации и распознавания 
можно параллельно выполнять расчет для каждого найденного номера, при распоз- 
навании — параллельно проводить распознавание каждого символа. 

Рассмотрим каждый из приведенных на схеме рис. 1 этапов более подробно. 

Нормализация входного изображения предполагает подготовку входных данных 
для подачи на вход алгоритму распознавания. При этом выполняется корректировка 
входного изображения для удовлетворения требований блока распознавания. При 
нормализации входного изображения можно выполнить компенсацию перспективных 
искажений изображения номерного знака, полученного в конкретных условиях наблю- 
дения, как показано на рис. 2. 


Входные изображения 


номеров 
Результат компенсации 


Рисунок 2-— Компенсация перспективных искажений изображений номерных знаков 


Для конкретных условий установки камеры наблюдения вид компенсацион- 
ного преобразования перспективы будет фиксированным, а алгоритм компенсации 
можно рассматривать как настройку системы распознавания для использования в 
конкретных условиях. Кроме геометрической нормализации входных изображений 
на рассматриваемом этапе может быть проведена яркостная нормализация, в ходе 
которой может быть расширен яркостный диапазон входного изображения и улуч- 
шено его качество для упрощения последующей обработки, а также проведены специ- 
фические яркостные преобразования, подготавливающие входное изображение с 
учетом особенностей дальнейшей обработки. 
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Обнаружение номерных знаков на изображении предполагает локализацию 
положения номерного знака на изображении или принятие решения о его отсутствии. 
В последнем случае никакие последующие действия не выполняются. В случае обна- 
ружения одного и более номерных знаков на изображении, для каждого из них 
выполняются все последующие этапы обработки. 

Обнаружение номерного знака может быть выполнено на основе разработки 
бинарного классификатора номер / фон и его применения в ходе мультимасштабного 
сканирования изображения [1]. В этом случае задача обнаружения является достаточно 
вычислительно сложной из-за большого количества разномасштабных областей канди- 
датов. Ускорить процесс обнаружения в рамках такого подхода удается за счет использо- 
вания при классификации номер / фон вычислительно простых свойств и применения 
каскада классификаторов, разработанного таким образом, чтобы исключить из даль- 
нейшего рассмотрения большинство кандидатов уже на начальных, наиболее простых, 
классификаторах каскада. В качестве вычислительно простых свойств возможно исполь- 
зование прямоугольных свойств, допускающих значительное сокращение объемов 
вычислений за счет предварительного расчета интегрального изображения [2]. Для 
получения каскада классификаторов возможно использование алгоритма АдаВооз( [3] 
и алгоритма обучения дерева решений [4], или любого другого алгоритма классифи- 
кации, допускающего минимизацию ошибки ложной тревоги при заданном ограничении 
на ошибку пропуска цели. Использование этого подхода предполагает наличие обшир- 
ной базы изображений номерных знаков, которая должна в частности содержать все 
типы номерных знаков, с которыми должна работать система. 

При достаточном пространственном разрешении входных изображений для обна- 
ружения номерных знаков возможно использование структурного подхода, основанного 
на поиске рамки номера, представляющей собой четырехугольник с определенными 
характеристиками. В этом случае можно априорно не ориентироваться на определенные 
типы номеров и не проводить мультимасштабное сканирование, что существенно 
уменьшит вычислительную сложность процесса обнаружения. Сложностью реализации 
такого подхода является возможность отсутствия или искаженности на изображении 
отдельных структурных элементов номера, что будет приводить к ошибке пропуска. 

Для любого из приведенных подходов можно сократить время обнаружения за 
счет сужения области поиска путем указания областей изображения, в которых 
возможно и невозможно присутствие номерного знака. 

Нормализация изображения номера необходима в случае, когда не выполняется 
этап нормализации входного изображения или его результат может иметь разброс, 
отрицательно влияющий на работу системы распознавания. Под нормализацией здесь 
понимается приведение изображения уже найденного номерного знака к стандартному 
виду, удобному для сегментации символов и распознавания. В качестве возможных 
задач нормализации в данном случае можно выделить расположение символов номера 
на одной горизонтальной линии, устранение искажений, связанных с наклоном сим- 
волов. Решение первой задачи может быть выполнено на основе преобразования Хафа 
для локализации линий рамки номера, второй — на основе максимизации дисперсии 
вертикальной интегральной проекции изображения номерного знака [5]. Кроме 
этого, на данном этапе целесообразно провести яркостные преобразования изобра- 
жения номерного знака, компенсирующие его частичное затенение и устраняющие 
шумы [6]. Сегментация символов предполагает выделение из изображения номера 
изображений отдельных символов. При решении этой задачи удобно воспользоваться 
тем фактом, что символы представляют собой связные объекты определенной яркости на 
однородном фоне. Для выделения межсимвольных участков можно использовать вер- 
тикальную и горизонтальную интегральные проекции изображения номерного знака, 


«Штучний 1нтелект» 4*2012 223 


Мурыгин К.В. 


что позволит сегментировать символы, не имея априорной информации об их колич- 
естве и порядке расположения. Другим подходом к сегментации символов является 
использование заранее заданных моделей расположения символов и их подгонка под 
конкретное изображение с целью максимизации выбранного критерия соответст- 
вия [5], [6]. Последний подход требует ограничения типового состава номеров, но 
вместе с этим позволяет на этапе сегментации определить тип номерного знака, а, 
следовательно, знать принадлежность каждого символа к определенному алфавиту, 
например, буквам или цифрам. 

Распознавание символов автомобильного номера заключается в определении 
класса для каждого сегментированного на предыдущем этапе изображения символа. 
Для решения этой задачи используется широкое разнообразие методов распознавания 
образов: сопоставление с эталоном [7], [8], применение деревьев решений [9], нейро- 
сетевые подходы, структурные подходы и т.д. Особенностью данного этапа является 
необходимость учета широких вариаций в изображениях символов одного класса. 
Связано это как с изменчивостью входных данных, так и с результатами работы преды- 
дущих этапов, которые могут вносить свои специфические искажения во входные 
данные для алгоритма распознавания символов. 

Этап проверки корректности и корректировки полученных результатов заклю- 
чается в использовании априорных знаний о распознаваемых номерных знаках и 
данных о предыдущих результатах распознавания для увеличения качества работы 
системы. В частности здесь могут быть использованы данные о возможности или невоз- 
можности существования как номера распознанной комбинации символов. В случае 
необходимости распознавания номеров из определенного ограниченного словаря, 
например, номера транспортных средств отдельной автобазы или предприятия, резуль- 
таты распознавания могут быть улучшены путем выбора наиболее похожего номерного 
знака из списка. В случае, когда в процессе анализа видео, один номерной знак распоз- 
нается на серии последовательных изображений, результат распознавания может быть 
улучшен за счет совмещения результатов распознавания по всем имеющимся кадрам. 


Тестирование систем распознавания номеров 


При разработке системы распознавания номерных знаков важно понимать, каким 
показателям качества она должна удовлетворять. На сегодняшний день выработаны 
определенные стандарты тестирования систем распознавания с использованием много- 
критериального показателя качества [10], [11]. Случаи некорректного распознавания 
классифицируются как: 

— ошибочное узнавание, т.е. все неправильно распознанные номера, которые 
могут существовать и присутствовать в базах данных, в т.ч. такие номера, где рас- 
познаны несуществующие на данный момент коды регионов, поскольку они могут в 
будущем появиться; 

— ошибки, т.е. все неправильно распознанные номера (фрагменты номеров 
или целые номера с добавленными символами, со знаками сомнения или без), которые 
не могут существовать и присутствовать в базах данных); 

— ложные распознавания, т.е. номера, которые были распознаны там, где их 
нет (решетки радиатора, надписи на проезжающем транспорте, блики на дороге и т.д.). 

На основе этой классификации для тестирования систем распознавания наиболее 
часто используются следующие критерии: 

— вероятность безусловного распознавания — вероятность полного совпадения 
цифробуквенной последовательности распознанного системой номера с номером из 
эталонного протокола, когда ему соответствует только один номер журнала системы; 
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— вероятность условного распознавания — вероятность полного совпадения 
цифробуквенной последовательности распознанного системой номера с номером из 
эталонного протокола, когда ему соответствует хотя бы один номер журнала системы, 
при этом допускается несколько отличающихся версий номера; 

— вероятность ошибочного узнавания — несовпадение цифробуквенной последо- 
вательности распознанного системой номера с номером из эталонного протокола, 
при этом распознанный номер может существовать и присутствовать в базах данных. 
В это число включаются один или несколько распознанных номеров из журнала 
системы, отличающиеся от соответствующего номера из эталонного протокола хотя 
бы одним символом. К числу ошибок относятся неправильно распознанные символы, 
отсутствующие на нужном знакоместе символы, лишние символы; 

— вероятность ошибки — несовпадение цифробуквенной последовательности 
распознанного системой номера с номером из эталонного протокола, при этом 
распознанный номер не может существовать и присутствовать в базах данных. В это 
число включаются один или несколько распознанных номеров из журнала системы, 
отличающиеся от соответствующего номера из эталонного протокола хотя бы одним 
символом. К числу ошибок относятся неправильно распознанные символы, отсутствую- 
щие на нужном знакоместе символы, лишние символы; 

— вероятность пропуска — вероятность отсутствия распознанного номера в жур- 
нале системы при наличии номера или отметки об автомобиле без номера в эталонном 
протоколе, т.е. пропущенный системой автомобиль; 

— вероятность ложного распознавания — вероятность наличия распознанного 
номера в журнале системы при отсутствии номера или отметки об автомобиле без 
номера в эталонном протоколе, т.е. запись в журнале системы распознавания, не отно- 
сящаяся к номерам автомобилей. 

Кроме применения описанных критериев качества часто также разделяют резуль- 
таты тестирования в светлое и темное время суток, так как показатели результатив- 
ности могут для этих случаев существенно отличаться. 


Выводы 


В статье рассматривается концепция системы распознавания номерных знаков 
автотранспортных средств, включающая следующие этапы обработки входных данных: 
нормализация входного изображения, обнаружение номерных знаков, нормализация 
изображения номера, сегментация символов, распознавание символов, проверка кор- 
ректности и корректировка полученных результатов. Рассмотрены особенности задач на 
отдельных этапах работы системы распознавания и возможные методы их решения. 
Приведены используемые на сегодняшний день показатели сравнения эффективности 
систем распознавания номеров. 
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Сопсер! ор Саг Ра Кесовптоп 5уЯйет 
Тье сопсерйоп оЁ Фе тесостоп зузет оЁ Псепзе рез оЁ уес]ез Фа шс4ез 
Фе $ерз$ оЁ ргосеззте фе шриё да: погта|7айоп оЁ Фе шрш ппазе, фе деесйоп оЁ 
Псепзе ре, Ше погта|7айоп оЁ Фе птазе питбег, зеотещайоп оЁ сВагацег$, сВагацетг 
тесогтйоп, уайЧайоп ап а4азитепе ог Фе гези$, аге сопз14егеа. Тбе ргорозеа 
десотроз$1@оп 1$ поЁ Ваг4-со4е ап сап сепегаПу езИтае Ше гапое оЁ (а$Кз$ ш Фе 
деуе]ортепЕ о{ саг рае тесостоп зует. Оезрие Фе сопз1%епсу оЁГ Фе шрш даа 
ргосеззтз {ю зрее4 ир Ше саси]айопз аЁ еасВ асе сап Бе изе4 Гог рагаПе! ргосез$1е. 
Зшсе ащесйоп оЁ Псепзе рез сап зппаКапеоц$1у Вап Ме шатуна! раг($ оЁ Фе ппазе, 
у*Пеп регРогтте погта|тайоп, зестещайоп апа гесост оп сап зппиапеоц$1у реРогт 
Фе сасшабноп опсе Гог еасв р1же, ут Ше тесостйоп — ю гуш-ОСК. ТВе Геашге$ о? ап 
три даа ог Ше р] ме тесоспоп зузетз аге сопз14егед. Тве ЮюоПо\уше таш 
свагацетзис$ оЁ апа соп41оп$ Гог ппазе асаилзх1оп фа аНес( Фе дааШу оЁ тесотйоп: 
зепзиуйу, зепауйу ш Фе шЁаге4 (Рог п1> БЕ $Воойп2), фе зВацег зрее4, фе аБШиу © 
оБаш Ше зраНа[ гезоийоп оЁ Ше ре птасез оуег 100 р1хе!$ ВомхотаПу. Ееагез оЁ 
(азК$ а зерагае $(асез оЁ тесооп! оп зузет РапсНопте оЁ апа роз$1Ые тефо4$ оЁ пет 
ес1$1оп аге сопз14егеа. шЧсаюг$ оЁ сотрамзоп оЁ еЁйслепсу оЁ саг ре тесо2тиоп 
зубетл$ изеД {ю4ау аге глуеп. 
Статья поступила в редакцию 29.08.2012. 
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